Компьютерное тестирование

Для обычного тестирования достаточно раздать бумажные листы с заданиями и потом вручную проверить результат. В случае автоматизированных систем мы должны предоставить компьютеру вопрос, тип вопроса и ответ(конкретное значение или указание на варианты ответа, или алгоритм проверки).

Преимущество маркван-разметки в том, что задания и ответы пишутся простым текстом, что быстрее, чем заполнять формы. В текстовый файл проще вносить правки и дополнения.

Этот раздел создан с прицелом на будущее. Программа для экспорта в какую-либо систему должна быть написана индивидуально. Возможно стоит поискать универсальный формата обмена тестами.

Общие правила оформления тестовых заданий

Тестовые задания размещаются в текстовых включениях с классом quest (или ?). Варианты ответов размещаются тут же нумерованным списком буквами или цифрами на усмотрение автора задания.

Правильный ответ размещается здесь же в псевдо-включении с классом result (или >). Ппсевдо-включение необходимо для возможности распечатки только вопросов без правильных ответов и наоборот.

[(?
Кто придумал сказку о царе Салтане?
 - а) Лермонов
 - б) Пушкин
 - в) Толстой
 - г) Народ

[{>
б
}]
)]

Виды тестовых заданий

• 1. Задания выбора из вариантов.
• 1. - а) бинарный выбор (ответ верно/не верно);
• 1. - а) единственный выбор (один из предложенных вариантов);
• 1. - б) множественный выбор (несколько из предложенных вариантов). Начисление баллов: Всё или ничего либо пропорционально?
• 2. Задания с манипуляцией данными.
• 2. - а) установление соответствий;
• 2. - б) установление правильной последовательности.
• 3. Задания с формулированием ответа.
• 3. - а) числовой ответ;
• 3. - б) верифицируемый текст (минимальная вариабельность с возможностью алгоритмической проверки);
• 3. - в) произвольный развернутый ответ (эссе);
• 3. - г) программный код (результат выполнения которого можно проверить).

Соответственно есть зарезервированные классы включений для каждого типа заданий:

• ?binary — бинарный выбор
• ?single — единственный выбор
• ?multiple — множественный выбор
• ?corresponds — установление соответствий
• ?sequence — установление правильной последовательности
• ?number — числовой ответ
• ?text — верифицируемый текст
• ? — произвольный развернутый ответ
• ?code — программный код.

Примеры заданий разных видов

Бинарный выбор

Ответ может принимать значения 0 или 1.

[(?binary
Верно ли утверждение: «Параллельные прямые не пересекаются»?
[{>
1
}]
)]

Единственный и множественный выбор

При выборе из представленных вариантов нужно указывать только букву или цифру указывающую на правильный ответ, без лишних скобок.

[(?single
Кто написа сказку о царе Салтане?
 -а) Лермонов
 -б) Толстой
 -в) Пушкин
 -г) Народ

[{>
в
}]
)]

Совокупность нескольких правильных вариантов ответов указываются через запятую.

[(?multiple
Какие цвета используются в светофоре для регулирования проезда автотранспорта?
 -а) Лунно-белый
 -б) Зеленый
 -в) Жёлтый
 -г) Синий
 -д) Красный

[{>
б, в, д
}]
)]

Установление соответствий

В вопросе должно быть 2 списка, а в ответе через запятую (порядок не важен), указываются идентификаторы из этих двух списков разделенных знаком минус.

[(?corresponds
Какие реки в какие моря впадают?
Реки
 - 1. Дон
 - 2. Волга
 - 3. Сырдарья
 - 4. Днестр
Моря
 - а) Черное
 - б) Аральское
 - в) Каспийское
 - г) Азовское

[{>
1-г, 2-в, 3-б, 4-а
}]
)]

Установление правильной последовательности

Здесь варианты перечисляются не через запятую, а через знак минус слева направо.

Нюанс следующего примера в том, что может быть 2 варианта ответа, второй вариант указывается на следующей строке.

[(?sequence
Расположите фигуры в порядке возрастания количества углов
 -а) треугольник
 -б) шестиугольник
 -в) квадрат
 -г) трапеция

[{>
а-в-г-б
а-г-в-б
}]
)]

Альтернативный вариант задания с картинками фигур:

[(?sequence
Расположите фигуры в порядке возрастания количества углов.
 -а) [[triangle.png]]
 -б) [[hexagon.png]]
 -в) [[square.png]]
 -г) [[trapeze.png]]

[{>
а-в-г-б
а-г-в-б
}]
)]

Числовой ответ

[(?number
У Васи в руках было 3 яблока, одно он съел сам, а другое отдал брату, сколько яблок у него осталось в руках?

[{>
1
}]
)]

Верифицируемый текст

Особенность верифицируемого текста в том, что соответствующий вопросу ответ может быть описан перечисленим всех возможных комбинаций:

[(?text
Как по неменки пишется слово =[Белый]=.

[{>
Weiß
weiß
weiss
Weiss
WEIẞ
WEISS
}]
)]

В связи с тем, что перечисление комбинаций может быть затратно, мы будем искать способы оптимизации записи.

Произвольный ответ

Такой ответ теоретически может проверить нейронная сеть, но будем считать его проверяемым только человеком.

[(?
Вам необходимо разметить прямоугольный фундамент заданного размера параллельно краю участка с заданными отступами от края и угла участка. Опишите алгоритм действий.
)]

Программный код

В разработке

[(?code
Напишите программу на языке Puthon которя выводит в консоль случайное число, а на следующей строке случайное слово не содержащее число или спецсимволы.

[{>
[/ Далее должна идти программа, проверяющая вывод. На каком языке она должна быть написана? Вряд-ли можно сделать универсальное описание условий.
название задачи;
способ ввода и вывода данных проверяемой программой (консоль или файл, в последнем случае указывается еще и имя входного и выходного файлов согласно условию задачи);
количество тестов (при отсутствии данной информации осуществляется проверка программы на всех тестах, находящихся в текущем каталоге);
шаблон для имен тестовых входных файлов;
шаблон для имен файлов правильных ответов (иногда, например в случае неоднозначных правильных ответов, такие файлы могут отсутствовать);
программа для проверки правильности полученного ответа (возможно, как указание одной из стандартных программ, так и созданной специально для проверки данной задачи);
время работы проверяемой программы в секундах на одном тесте.
/]

}]
)]

Генерируемые вопросы

Условия подсчёта ответов

В разработке